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(57) Abstract 

The dynamics of common image 
sensor are not sufficient to process the lu- 
minosity contrasts which occur in many 
situations. The dynamic enhancement 
processes hitherto disclosed have consid- 
erable disadvantages for practical appli- 
cations. Image sensors produced by the 
new process should link enhanced dy- 
namics to ease of use. In order to avoid 
pixel overexposure or underexposure in 
the event of high image contrasts, a lo- 
cal auto-adaptive control is proposed. By 
means of this control, each pixel automat- 
ically ends its integration period as soon 
as it has integrated a sufficient photocur* 
rent. An analogue signal represents the 
length of the integration period selected 
by the pixel. It represents together with 
the integrated pixel signal a highly dynamic 
Owing to their local auto-adaptability, these 
be processed, for example vehicle guidance 
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brightness information with less strict requirements on the dynamics of the individual signals, 
image sensors are suitable for all fields of application in which high luminosity contrasts must 
in road traffic, nature films or astronomy. 



(57) Zusammenfassung 

Die Dynamite der Ublichcn Bildsensoren rcicht nicht aus, um die in vielen Situationen auftretenden Helligkeitslcontraste zu verarbeiten. 
Bisher veroffentlichte Verfahren zur Erhohung der Dynamik weisen erhebliche Nachteile fOr die praktische Anwendung auf. Bildsensoren 
nach dem neuen Verfahren sollen hohe Dynamik mit cinfacher Anwendbarkeit verbinden. Um die bei hohen Bildkontrasten auftretenden 
Ober- bzw. Unterbelichtungen der Pixel zu vermeiden, enthait jedes Pixel eine lokalautoadaptive Steuerung. Mit Hilfe dieser Steuerung 
beendet jedes Pixel automatisch seine Integrationsperiode, sobald es ausreichend viel Photos trom aufintegriert hat. Ein analoges Signal 
reprasentiert die vom Pixel gewahlte Lflnge der Integrationsperiode. Es stellt gemeinsam mit dem aufintegrierten Pixetsignal eine 
Helligkeitsinformation mit hoher Dynamik dar, bei geringen Anforderungen an die Dynamik der Einzelsignale. Die Bildsensoren eignen 
sich aufgrund der Lokalautoadaptivitflt fUr alle Anwendungsgebiete, bei denen hohe Helligkeitskontraste verarbeitet werden mtfssen wie 
bcispielsweise Fahrzeugfllhrung im StraBenverkehr, Naturfilme oder Astronomic. 
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Lokalautoadaptiver optischer Sensor 

Die vorliegehde Erfindung betrifft ein Verfahren fur den 
Betrieb von Bildsensoren nach dem „lokalautoadaptiven 
Verfahren" zur Aufnahme von hochdynamischen Bildszenen. 

Elektronische Bildsensoren sind bekannt und werden in den 
unterschiediichsten Technologien hergestellt. Solche 
Sensoren sind so aufgebaut, dafi eine Anzahl 
Lichtwandelelemente (Pixel) in geeigneter Weise 
angeordnet sind, meist als eine einzige Zeile oder in 
Spalten und Zeilen als Matrix geordnet . Ein auf den 
Bildsensor proj iziertes Bild wird von den Pixeln in ein 
der am Pixelort einfallenden Lichtmenge proport ionales 
elektrisches Signal umgewandelt . Die zugehorige 
Proportionalitatskonstante wird als 

Umwandlungsempf indlichkeit (Empf indlichkeit ) des Sensors 
bezeichnet. In einem sehr verbreiteten Typ von 
Bildsensor, dem „integrierenden Bildsensor", erzeugen die 
Pixel das Ausgangssignal, indem sie photostromgenerierte 
Ladungstrager iiber ein gewisses Zeitintervall 
(Integrationszeit) auf eine Kapazitat auf integrieren . Das 
elektrische Signal wird mittels geeigneter, am Pixel 
aniiegender Ansteuersignale {Takt- o. Lesesignal) und vom 
Pixel wegfuhrender Auslesepfade ausgelesen und mit 
geeigneten Mitteln bildauswertenden oder bildverwertenden 
Einheiten wie zum Beispiel einem Auf zeichnungsgerat 
zugefuhrt . 
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Ein wesentliches Merkmal eines Bildsensors ist seine 
Dynamik. Sie ist definiert durch die maximale und die 
minimale Bildhelligkeit am Pixelort, die zu einem 
sinnvoll verwertbaren Signal am Ausgang des Bildsensors 
ftihren. Nach unten ist die Dynamik begrenzt durch das 
elektrische Rauschen des Ausgangssignals : ein 
Pixelsignal, das kleiner ist als das elektrische 
Rauschen, ist nicht verwertbar. Nach oben ist die Dynamik 
durchweg begrenzt durch die Sattigung der fur die 
Signalwandlung und Signaltibertragung verwendeten 
Komponenten . 

Ein weithin bekanntes Problem von Bildsensoren ist nun, 
da/5 ihre Dynamik nicht ausreicht, urn die in vielen 
Anwendungsgebieten auftretenden Helligkei tskontraste voll 
auf das Ausgangssignal abzubilden. Dadurch werden 
entweder dunkle Bildteile vom Rauschen verschluckt 
und/oder hellere Bildteile sind in der Sattigung, was 
zusatzlich zu weiteren Stdrungen wie Smear oder Blooming 
ftihren kann. Zur Behebung des Problems der begrenzten 
Dynamik sind einige Verfahren bekannt. 

Das US-Patent Nr. 5168532 sei stellvertretend fur eine 
grofie Zahl von Patenten und Verof f entlichungen genannt, 
die die effektive Dynamik eines Bildsensorsystems nach 
dem Prinzip der „Zweif achauslese" erhdhen. Hierzu wird 
das Bildsensorsystem mit einer Mdglichkeit versehen, die 
oben benannte Empf indlichkeit variieren zu konnen; z.B. 
durch Wahl der Integrationszeitdauer eines integrierenden 
Bildsensors Oder noch einfacher mit Hilfe einer 
Irisblende. Sodann werden zwei Bilder aus dem Bildsensor 
ausgelesen, eines bei einer niedrigen Empf indlichkeit , 
eines bei einer hohen Empf indlichkeit . Diese zwei Bilder 
werden anschliefiend nach einem geeigneten Verfahren zu 
einem Gesamtbild zusammengef ugt . Das Verfahren der 
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„Mehrfachauslese", das ebenfalls in den verschiedensten 
Varianten patentiert und verof f entlicht wurde (z.B. US- 
Patent Nr. 5638118), erganzt das Verfahren der 
„Zweifachauslese" nur insofern, als statt zweier eine 
hohere Anzahl von Bildern mit unterschiedlichen 
Empf indlichkeiten aufgenommen, gespeichert und 
zusammengeftlgt werden. Beiden Verfahren ist der 
erhebliche Nachteil eines komplizierteren Sensor-Systems 
gemeinsam, das neben dem Bildsensor noch Mittel zur 
Speicherung und zur Verarbeitung der Bilddaten enthalt, 
wie z.B. einen Framegrabber . 

Einer zweiten Gruppe von Verfahren zur Erhohung der 
Sensordynamik ist die Kompression des Bildsignals bei der 
Signalerzeugung im Pixel gemeinsam. Bei dem gangigen 
Kompressionsverf ahren der logarithmischen Kompression 
wird der lichtabhangige Photostrom in eine logarithmisch 
davon abhangige Signalspannung umgewandelt durch 
Ausnutzung der logarithmischen Spannungs-Stromkennlinie 
von Dioden oder MOS-Transistoren im Betrieb unterhalb der 
Schwellspannung, wie beispielsweise verof f entlicht von N. 
Ricquier und B. Dierickx in „Active Pixel CMOS image 
sensor with on-chip non-uniformity correction'*, IEEE 
Workshop on CCDs and Advanced Image Sensors, California, 
20-22. April, 1995. Diese und alle anderen 
Kompressionssensoren verlieren durch die 
Dynamikkompression Bilddetails. Desweiteren werden 
ortsfeste Storungen (sog. „Fixed Pattern Noise" oder 
FPN) , die durch lokale Schwankungen der 

Bauelementeparameter wie Transistorschwellspannungen oder 
Kapazitaten in den Pixeln und den Signalpfaden entstehen, 
exponentiell verstarkt, was wiederum durch aufwendige 
Mafinahmen korrigiert werden muft . Andere Verfahren 
(beispielsweise US-Patent Nr. 5572074 oder „Analog VLSI 
phototransduction by continuous-time, adaptive, 
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logarithmic photoreceptor circuits" von T. Delbruck und 
C.A. Mead in Computation and Neural Systems Program, 
Technical Report, CNS memorandum No. 30, 1994, S. 1-23, 
California Inst, of Technology, Pasadena, CA 91125) 
steuern mit Hilfe einer aufwendigeren Pixelschaltung die 
Pixelempf indlichkeit lokal durch das vom Pixel selbst 
produzierte Ausgangssignal ; effektiv entspricht das 
Verfahren jedoch wieder den Kompressionsverf ahren mit den 
gleichen nachteiligen Folgen. 

Bessere Verfahren zum Betrieb von Bildsensoren mit hoher 
Dynamik stellen die lokaladaptiven Verfahren dar, Ein 
iokaiadaptives Verfahren ist dadurch gekennzeichnet , dali 
die Empf indlichkeit des Bildsensors nicht flir alle Pixel 
gleichzeitig (global) sondern fur kleinere Untergruppen 
von Pixeln, bevorzugt fur jedes Pixel einzeln einstellbar 
ist (lokal) . Der Natur der Bildsensoren gemafi kann dazu 
an unterschiedlichen Punkten des Signalweges angesetzt 
werden. 

Verfahren, die das auf die Pixel fallende Licht 
pixelweise schwachen, sind in den US-Patenten Nr. 5532743 
(Abschwachung durch LCD-Pixel), Nr. 55410705 
(Abschwachung durch Polarisatoren) und Nr. 5218485 
beispielhaft beschrieben. Sie setzen alle einen 
diffizileren optischen Aufbau und eine aufwendige, 
externe Ansteuerung der Abschwachungselemente voraus. 

Einfachere Systeme mit hoherer Dynamik erreicht man mit 
solchen lokaladaptiven Verfahren, die die 
Integrationszeit pixelweise steuern. Ein gangiges 
Verfahren mit lokaladaptiver Integrationszeit bedient 
sich dem individuellen Pixelreset, IPR; so z.B. von 0. 
Yadid-Pecht, B. Pain, C. Staller, C. Clark und E . Fossum 
berichtet in x CMOS Active Pixel Sensor Star Tracker with 
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Regional Electronic Shutter', IEEE Journal of Solid-state 
Circuits, Vol. 32, No. 2, Feb. 1997 und in *Wide dynamic 
range APS star tracker', Solid State Sensor Arrays and 
CCD cameras, San Jose, Calif ornia, Proceedings of the 
SPIE, Vol. 2654, S. 82-92, 1996 sowie von Chen S., 
Ginosar R. in ^Adaptive Sensitivity CCD Image Sensor', 
Proceedings of the SPIE, Vol. 2415, S. 303-309, 1995. Bei 
den beschriebenen Sensoren wurden die Pixelschaltungen 
derart modifiziert, dali ihre Integrationskapazitat zu 
jedem Zeitpunkt in jedem Pixel einzeln zuriickgesetzt 
werden kann. Dadurch kann in gewissen Grenzen fur jedes 
Pixel eine eigene Integrationszeitdauer erreicht werden 
una mithin die Pixelempf indlichkeit an die am jeweiligen 
Pixelort auftreffende Lichtintensit&t adaptiert werden. 
Die beschriebenen Verfahren zeichnen sich durch einen 
geringen Zusatzauf wand in der Pixelschaltung bei 
gleichzeitig grofler Dynamik aus . 

Bei dem am Insitut fur Halbleiterelektronik der 
Universitat-GH Siegen entwickelten lokaladaptiven 
Bildsensor (LAS) lafit sich die Integrationszeit jedes 
Pixels einzeln schon vor der eigentlichen 
Integrationsphase in Form einer Analogspannung in die 
Pixel programmieren. (siehe T. Lule, H. Fischer, S. 
Benthien, H. Keller, M. Sommer, J. Schulte, P. Rieve, M. 
Bohm, „Irnage Sensor with Per-Pixel Programmable 
Sensitivity in TFA Technolgy", H. Reichl, A. Heuberger, 
Micro System Technologies '96, VDE-Verlag, Berlin, 
Offenbach, S. 675 ff., 1996) 

Nachteilig an den Verfahren des IPR und des LAS ist 
jedoch der erhebliche Aufwand an Zusat zschaltungen, der 
notig ist, urn aus dem zuletzt ausgelesenen Bild 
pixelweise die fur den nachsten Integrationszyklus 
benbtigten Belichtungszeiten und daraus resultierenden 
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Ansteuertakte zu generieren. Der zusatzliche Nachteil der 
IPR-Verf ahren liegt in dem Problem, alle Pixel wahrend 
der Integrationsphase in der gewunschten Reihenfolge 
zurticksetzen zu miissen, was zu Kollisionen und 
nichtdeterministischen Takttiberkopplungen auf die 
empf indliche Pixelelektronik fiihren kann. Dariiberhinaus 
haftet alien bis hierhin beschriebenen adaptiven 
Verfahren der Nachteil des Zeitverzugs an; die fur eine 
Integrationsphase einzustellende Empf indlichkeit wird aus 
den Pixelsignalen der vorherigen Integrationsphase 
gewonnen, wodurch eine situationsgemafie Einstellung der 
Pixelempf indlichkeit nicht sicher gewahrleistet 1st. 

Der im Patentanspruch 1 angegebenen Erfindung liegt das 
Problem zugrunde, die Empf indlichkeiten der Pixel eines 
Bildsensors ohne Zeitverzug und mit geringem 
Schaltungsaufwand an die am Pixelort herrschende 
Helligkeit anzupassen und mithin die effektive Dynamik 
des Bildsensors zu erhohen. 

Die Aufgabe wird durch die Adaption an die am Pixelort 
herrschende Helligkeit durch die Pixelschaltung selbst 
gelost, die Pixel sind lokalautoadaptiv . 

Das Prinzip der Lokalautoadaptivitat wurde bekannt 
gemacht durch O. Yadid-Pecht in „The Automatic Wide- 
Dynamic-Range Sensor", SID 93, Intl. Symp., Digest, S. 
495-498, 1993. Dort wurde die Lokalautoadaptivitat 
erreicht durch die Fahigkeit des Pixels sich selbst 
zurticksetzen zu konnen, wenn das auf integrierte Signal 
einen Schwellwert uberschreitet . Prinzipiell wird dadurch 
zwar eine Sattigung der Pixel verhindert, die 
Integrationszeit wird dennoch nicht sicher an die auf das 
Pixel fallende Lichtintensitat angepafit, da es z.B. 
passieren kann, dali ein schwach beleuchtetes Pixel sich 
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kurz vor Ende der Integrationsphase noch einmal 
zuriicksetzt und in der verbleibenden, sehr kurzen 
Integrationszeit keine nennenswerte Signalspannung mehr 
auf integrieren kann. 

Zudem mufl die Integrationsdauer, die vom Pixel gewahlt 
wurde, auf geeignete Weise den nachf olgenden 
bildauswertenden Stufen mitgeteilt werden, damit die 
Helligkeit am Pixelort aus den zwei Groften 
Integrationsdauer und auf integriertes Pixelsignal 
rekonstruiert werden kann. 0. Yadid-Pecht laflt dieses 
Problem weitgehend unbeantwortet und erwahnt nur in 
^Widening the dynamic range of pictures", High Resolution 
Sensors and Hybrid Systems, San Jose, CA, Proceedings of 
the SPIE, Band 1656, S. 374-382, 1992, dafl die 
Integrationszeit lokal in 4 Flipflops gespeichert werden 
sollte, was zu einem erheblichen Aufwand an 
Pixelschaltung und zusatzlichen Ansteuerleitungen ftlhrt. 
Urn die effektive Grofle der Pixelflache nicht vollig 
unwirtschaf tlich werden zu lassen, schlagt die Autorin 
weiter vor, die lokalautoadaptive Steuerung nur einmal 
pro Pixelblock von beispielsweise 8x8 Pixeln zu 
realisieren, was den Vo.rt.eil der Lokalautoadaptivitat 
sofort zunichte macht, da ein starker Hell-Dunkelubergang 
innerhalb dieses Pixelblocks zu den gleichen 
Dynamikbeschrankungen ftthrt wie sie bei den 
globaladaptiven Sensoren auftreten. 

Die er f indungsgemafie Losung des Problems besteht in einem 
integrierenden, lokalautoadaptiven Pixel, das seine 
Integrationszeit automatisch, autark beendet noch bevor 
soviele photogenerierte Ladungen auf integriert wurden, 
dali das Ausgangssignal sattigt. Dieses Verfahren 
unterscheidet sich dadurch von dem vorgenannten, dafl das 
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Pixel den Endzeitpunkt der Integrationsperiode selbst 
bestiirunt und nicht den Anf angszeitpunkt . 

Ein vorteilhaf tes Verfahren zur Beendigung der 
Integrationszeit stellt ein elektronischer Schalter dar, 
der in den Pfad des Photostromes vora Detektor zur 
Integrationskapazitat eingeschleif t wird und der zur 
Beendigung der Integrationszeit den Strompfad vom 
Detektor zur Kapazitat unterbricht. Ein dem vorgenannten 
Verfahren gleichwertiges stellt ein elektronischer 
Schalter dar, der zwischen einer ersten 
Integrationskapazitat, auf die der lichtproportionaie 
Photostrom wahrend der gesamten Integrationsphase flieflt, 
una einer zweiten Hal tekapazitat eine leitende Verbindung 
herstellt zu dem Zeitpunkt, da die Integrationszeit des 
betroffenen Pixels beendet werden soli, so dafl die 
Spannung auf der Haltekapazitat nach Ende der 
Integrationsphase proportional zur Spannung auf dem 
Integrationskondensator zum ebengenannten Zeitpunkt ist. 
Pixelschaltungen mit solchen elektrischen Schaltern sind 
hinlanglich bekannt und werden bei fast alien 
incegrierenden Bildsensoren zur globalen Steuerung der 
Integrationszeit eingesetzt . 

Der besondere Vorteil der vorstehend genannten Losung 
besteht darin, dafi ein so betriebener Sensor bei geringem 
Aufwand eine gegenuber einem herkommlichen Sensor 
wesentlich hohere Dynamik aufweist, so da/i dieser Sensor 
bei wesentlich hdheren Kontrasten der Bildszene noch in 
alien Bildausschnitten auswertbare Ausgangssignale 
liefert. Weiterhin liegt das Ausgangssignal fur einen 
erheblich erweiterten Bereich von Bildhelligkeiten immer 
im oberen Bereich der Aussteuerung, was automatisch einen 
verbesserten Signal-zu-Rausch-Abstand und damit eine 
verbesserte Bildqualitat mit sich bringt. 
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Eine vorteilhafte Weiterbildung des Verfahrens besteht 
darin, eine Information (im folgenden Integrationssignal ) 
im Pixel zu speichern, die Auskunft daruber abgibt, wie 
lange die Integrationsdauer des Pixels betrug, und die 
zusammen mit dem auf integrierten Pixelsignal aus dem 
Bildsensor ausgelesen wird, so daft die am jeweiligen 
Pixelort herrschende Helligkeit aus dem 
Integrationssignal und dem Pixelsignal eindeutig 
ermittelt werden kann. Vorteilhaft ist dabei, das 
Integrationssignal analog im Pixel zu speichern, das 
heifit beispielsweise in Form einer Spannung, eines 
Stromes oder einer Ladung. Solche analoge 
Informationsspeicher wie eine Kapazitat oder ein 
Stromspiegelspeicher sind hinlanglich bekannt und lassen 
sich in gangigen Bildsensor-Technologien wie z.B. CMOS, 
BiCMOS oder TFT auf kleinerer Flache realisieren als ein 
Digitalwertspeicher mit gleichem Inf ormationsgehalt, wie 
er beispielsweise von 0. Yadid-Pecht vorgeschlagen wurde. 
Aber auch eine Speicherung des Integrationssignals als 
Digitalsignal kann eine vorteilhafte Moglichkeit 
darstellen, da sie eine wesentlich hohere Storsicherhei t 
bietet . 

Weiterhin bestehen die Moglichkeiten, dieses 
Integrationssignal innerhalb des Pixels autark zu 
generieren, von aulien in das Pixel hineinzutragen oder 
mit Hilfe von aulien in das Pixel hineingetragenen 
Signalen zu generieren. Vorzugsweise wird das Signal 
vollstandig von auften in das Pixel hineingetragen, da 
hierdurch weitere Komponenten fiir die Signalgenerierung 
im Pixel eingespart werden und das Pixel das von aulien 
angelegte Signal nur noch speichern muiJ. Geeigneterweise 
legt man das von auften heranzutragende Signal an alle 
Pixel oder zumindest an groftere Gruppen wie 
beispielsweise ganze Spalten oder Zeilen von Pixeln 
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gleichzeitig an, so dafi nur eine geringere Anzahl von 
Generatoren fur dieses Signal bereitgestellt warden mufi, 
als der Sensor Pixel hat. Diese Generatoren liefern dann 
ein Signal wie eine Spannung oder einen Strom oder ein 
digitales Wort, das sich zweckmafiigerweise monoton zur 
schon verstrichenen Integrationszeit verhalt, wie zum 
Beispiel eine Spannungsrampe . Sobald ein Pixel seine 
Integrationszeit beendet, speichert es zu diesem 
Zeitpunkt nicht nur das bis dahin auf integrierte 
Pixelsignal im Belichtungskondensator , sondern auch das 
von seinem zugehorigen Generator von aufien angelegte 
Integrationssignal in seinem internen 
Integrafcionssignalspeicher . 

Der besondere Vorteil der vorstehend genannten Losung 
besteht darin, dafi die Helligkeitsinf ormation auf zwei 
Signalgroflen aufgeteilt wird, zum einen in das 
Pixelsignal und zum anderen in das Integrationssignal, 
das Auskunft iiber die Integrat ionszei tdauer abgibt . Auf 
diese zwei Signale aufgeteilt, kann eine wesentlich 
hohere Helligkeitsdynamik weitergegeben werden, als es 
mit einem Signal mbglich ware, da das Integrarionssignai 
sozusagen eine Grobskalierung vorgibt, wahrend das 
Pixelsignal die Feininf ormation liefert. Insbesondere in 
gewerblichem Umfeld, wo eine Vielzahl an elektrischen 
Stbrquellen die Signaldynamik auf den Ubertragungswegen 
beschrankt, stellt diese Aufteilung der Dynamik die 
einzige Moglichkeit dar, Bilder mit sehr hoher 
Signaldynamik (>100dB) zu verarbeiten. 

Eine vorteilhafte Weiterbildung des Verfahrens besteht 
darin, dafi die Beendigung der Integration nur zu wenigen, 
von aufierhalb des Pixels vorgegebenen Zeitpunkten 
erfolgen kann, die durch ein von aufien an das Pixel 
angelegtes Taktsignal definiert werden. Der Vorteil 
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dieser Zeitdiskretisierung liegt in der praziseren 
Kontrolle uber die von den Pixeln wahlbaren 
Integrationsperioden. Insbesondere die sich bei hohen 
Beleuchtungsstarken einstellenden, sehr kurzen 
Integrationszeitdauern mussen mit einer so hohen 
Prazision eingestellt und vom Integrationssignal erfalit 
werden konnen, daii die Ungenauigkeiten noch viel 
kleineren Zeiten entsprechen, als die 

Integrationszeitdauer ohnehin schon ist, was durch eine 
getaktete Diskretisierung der Integrationszeitdauern 
besonders vorteilhaf t erreicht wird. 

Eine vorteilhafte Weiterbildung des Verfahrens, 
insbesondere im Zusaramenhang mit der Zeitdiskretisierung 
der Integrationsperioden und der Verwendung eines 
analogen Integrationssignals, stellt die Verwendung eines 
amplitudendiskretisierten, analogen Integrationssignals 
dar derart, dali das Integrationssignal nur diskrete 
Amplituden annehmen kann. Die Amplitudendiskretisierung 
des Integrationssignals hat den Vorteil, dali 
nachfolgende, bildverwertende Stufen uber eine 
Schwellwertbildung die gewahlte Integrationsperiode 
prazise rekonstruieren konnen una dali die in 
Analogschaltungen unvermeidlichen Storeinf lvisse wie 
Rauschen und FPN bei ausreichendem Abstand der 
Diskretisierungsstufen keinen Einfluli auf die 
Schwellwertbildung und damit auf die rekonstruierte 
Integrationszeitdauer hat. 

Im Falle der digitalen Speicherung des 

Integrationssignals liegt von der Natur der Sache schon 
eine Wertdiskretisierung vor, die in der besagten 
Amplitdendiskretisierung des Analogsignals eine 
Entsprechung findet. Weiterhin ist die digitale 
Speicherung am vor teilhaf testen zusammen mit der besagten 
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Zeitdiskretisierung einzusetzen, da so jeder 
Integrationszeit eineindeutig ein digitaler Wert 
zugewiesen werden kann. Von dem Standpunkt aus 
betrachtet, wie er in modernsten Speichertechnologien 
vertreten wird, daii ein grob amplitudendiskretisiertes 
Analogsignal ein Multilevel-Digitalsignal darstellt, ist 
der Obergang von einem reinen, binaren Digitalsignal zum 
aiuplitudendiskretiiserten Analogsignal fliefiend und 
variantenreich. 

Eine vorteilhafte Weiterbildung des Verfahrens stellt die 
Verwendung einer exponentiellen Verteilung der 
diskretisierten Integrat ionsperioden dar. Mit 
exponentieller Verteilung ist eine derartige Auswahl an 
vorgegebenen, vom Pixel wahlbaren Integrationsperioden 
gemeint, daii jeweils eine Integrationsper iode urn einen 
festen Faktor langer ist als die nachstkurzeren wahlbare. 
Diese Verteilung ist eine von anderen Anwendungsgebieten 
wie zum Beispiel den VerschlufJzeiten eines Fotoapparates 
her bekannte Verteilung, die fur eine gleichmaliige 
Abdeckung der vielen Zehnerpotenzen moglicher 
Lichtihtensitaten sorgt. 

Eine vorteilhafte Weiterbildung des Verfahrens stellt die 
technologische Realisierung des lokalautoadaptiven 
Bildsensors in der am Institut fiir Halbleiterelektronik 
der Universit&t-GH Siegen von Prof. Bohm und seinen 
Mitarbeitern entwickelten TFA-Technologie dar, wie sie 
z.B. von Prof. M. Bohm in ^Intelligent Image Sensor 
Systems in TFA (Thin Film on ASIC) Technology", einem 
Vortrag anlalilich des Special Course on Intelligent 
Sensors, University of Roorkee, Roorkee U.P., Indien, 
1995, beschrieben ist. Der dort aufgewiesene Vorteil der 
vertikalen Integration des elektrooptischen Detektors auf 
dem signalverarbeitenden ASIC macht sich insbesondere bei 
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den lokalautoadaptiven Sensoren bezahlt, da sich nicht 
Pixelelektronik und Detektor gegenseitig den Platz 
wegnehmen wie beispielsweise bei der reinen CMOS- 
Technologie, sondern die von der etwas umf angreicheren 
Pixelelektronik eingenommene Chipflache gleichzeitig dem 
daruberliegenden Detektor zur Verfiigung steht, der 
dadurch empf indlicher wird. 

Weitere vorteilhafte Weiterbildungen des Verfahrens gehen 
aus weiteren Unteranspriichen hervor. 

Ein Ausfuhrungsbeispiel der Erfindung, die bevorzugte 
Vorrichtung zur Durchfiihrung von vorstehend beschriebenen 
Verfahren, wird in den folgenden Figuren dargestellt und 
im weiteren naher bechrieben. Das Ausfuhrungsbeispiel 
stellt einen er f indungsgemalien, in TFA-Technologie 
realisierten Bildsensor mit 90dB Dynamik dar. 

Fig. 1 zeigt das Blockschal tbild der lokalautoadaptiven 
Pixelelektronik mit automatischer Integrationsabschalrung 
und Integrationssignalspeicherung . 

Fig. 2 zeigt die Ansteuersignale fur den Betrieb des 
Pixels nach Fig. 1 wahrend der Integrationsphase . 

Fig. 3 zeigt die von einem Pixel nach AbschluU der 
Integrationsphase in der Auslesephase ausgegebenen 
Integrations- und Pixelsignale aufgetragen Qber der auf 
diesem Pixel auf tref f enden Lichtintensitat . 

Fig. 4 zeigt schematisch das Zusammenspiel der Pixel 
eines Flachensensors mit den peripheren Schaltungen auf 
dem Bildsensorchip. 



WO 98/14002 



- 14 - 



PCT/EP97/05506 



Das Pixellayout in Fig. 5 ist zur Verdeutlichung der 
moderaten Komplexitat eines lokalautoadaptiven Pixels 
angefugt. 

Fig. 1 zeigt das Blockschaltbild des in TFA-Technologie 
realisierten lokalautoadaptiven Pixels. Auf der 
Pixelschaltung befindet sich der lichtempf indliche 
Detektor 01 aus amorphem Silizium, dessen Kathode mit der 
in der Pixelschaltung realisierten Detektorschaltung 02 
verbunden ist. Die Detektorschaltung ist ein Spezifikurn 
der TFA-Technologie und nicht von Bedeutung fur die 
Lokalautoadaptivitat des Pixels. Sie halt die Spannung an 
der Kathode des Detektors 01 auf konstantem Wert/ was die 
TFA-spezif ischen Kopplungen zwischen benachbarten 
Detektoren unterdruckt. 

Der vom Detektor 01 herriihrende und von der 
Detektorschaltung 02 wei tergereichte Photostrom 03 wird 
wahrend der Integrat ionsphase iiber den geschlossenen 
Photostromschalter 04 auf der Integrat ionskapazitat 05 
auf integriert . Die resultierende Pixelspannung 06 am 
Integrationskondensator 05 wird vom getakteten 
Pixelkomparator 07 mit einer dem Pixel von aufien 
zugefiihrten Vergleichsspannung 08 verglichen. Das 
Vergleichsergebnis erscheint erst nach einem Taktsignal 
von Takt 09 am Steuerausgang 10 des Pixelkomparators 07. 
Hat die Pixelspannung 06 zum Zeitpunkt des Taktsignals 
die Vergleichsspannung 08 iiberschritten, so schaltet der 
Steuerausgang 10 den Photostromschalter 04 aus und 
beendet damit die Integrationsperiode fur die aktuelle 
Integrationsphase . Gleichzeitig mit jedem Taktsignal an 
Takt 09 liegt am Integrationssignaleingang Rampe 11 eine 
steigende, stufige Spannungsrampe an, die uber den 
geschlossenen Integrationssignalschalter 12 auf den 
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Integrationssignalkondensator 13 gegeben wird. In dem 
Moment, da der Steuerausgang 10 die Photostromintegration 
Uber Schalter 04 beendet, offnet derselbe Steuerausgang 
10 auch den mtegrationssignalschalter 12, so dali die 
Integrationssignalspannung 14 auf dem 
Integrationssignalkondensator 13 auf dem Spannungswert 
stehen bleibt, der zum Zeitpunkt der Abschaltung am 
Integrationssignaleingang Rampe 11 anlag. 

In der nachfolgenden Auslesephase veranlalit ein 
Lesesignal am Eingang Read 15 den Pixelsignalpuf f er 16 
und den mtegrationssignalpuf f er 17, das auf integrierte 
Pixelsignal 06 und das f estgehaltene Integrationssignal 
14 auf die Pixelsignal-Spaltenleitung 18 bzw. die 
Integrationssignal-Spaltenleitung 19 auszugeben. 

Vor der nachsten Integrationsphase schlieBt ein 
Resetsignal am Eingang Reset 20 den Resetschalter 21 und 
loscht damit das auf integrierte Pixelsignal 06. Mit dem 
nachsten Taktsignal am Eingang Takt 09 schlieften der 
Photostromschalter 04 und der mtegrationssignalschalter 
12 wieder, und die nachste Integrationsphase beginnt. 

Fig. 2 zeigt uber der Zeit aufgetragen die Steuertakte 
Takt 09 und Rampe 11 sowie das Integrationssignal 14 und 
das Pixelsignal 06 jeweils fur zwei Pixel - ein Pixel bei 
hoher Beleuchtung (Pixl 30 bzw. Intl 31 ) und ein Pixel 
bei niedrigerer Beleuchtung (Pix2 34 und Int2 35 ). Das 
Signaldiagramm zeigt ein Ausfiihrungsbeispiel mit sechs 
wahlbaren, exponentiell verteilten Integrationszeiten 39 
bis 44, wobei die Zeitachse in relativen Einheiten 
angegeben ist. 
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Mit der ersten steigenden Flanke 38 von Takt 09 startet 
die Integrationsphase, ab hier laufen die auf integrierten 
Pixelspannungen Pixl 30 und Pix2 34 hoch. Mit jeder 
weiteren steigenden Flanke von Takt 09 kann ein Pixel bei 
ausreichend hoher Pixelspannung seine Integrationsperiode 
beenden. WUrde beispielsweise ein Pixel bei der 
Taktflanke 39 seine Integration beenden, dann dauerte 
seine Integrationsperiode 1 Zeiteinheit, bei Taktflanke 
40 dauerte sie 2 Zeiteinheiten, bei Taktflanke 41 dauerte 
sie 4 Zeiteinheiten, bei Taktflanke 42 8 Zeiteinhei ten, 
bei Taktflanke 43 16 Zeiteinheiten; wurde ein Pixel bei 
Taktflanke 44 seine Integrationsperiode beenden, dann 
dauerte seine Integrationsperiode 32 Zeiteinheiten. Die 
wahlbaren Zeiteinheiten sind also in diesem 
Ausfuhrungsbeispiel exponentiell zur Basis 2 gewahlt 
worden. 

Die Vergleichsspannungen Ucomp 08 wurden fiir diese 
Verteilung der Zeiteinheiten auf halben Pixelsignalhub 33 
bzw. 37 gesetzt. Hat ein Pixelsignal 06 innerhalb einer 
Integrationsperiode den halben Signalhub noch nicht 
uberschritten, so wird es in der nachst langeren, doppelt 
so langen Integrationsperiode nicht den vollen Signalhub 
uberschreiten, so daft es noch weiter auf integriert werden 
kann, vorausgesetzt , dafi sich die Helligkeit am Pixelort 
wahrend der folgenden, zusatzlichen Integrationszeit 
nicht wesentlich andert. Hat ein Pixelssignal 06 
innerhalb einer Integrationsperiode jedoch den halben 
Signalhub schon uberschritten, so wurde es in der nachst 
langeren, doppelt so langen Integrationsperiode den 
vollen Signalhub uberschreiten, so dafi die Integration 
beendet werden mufl . Durch diese Kombination von wahlbaren 
Integrationszeiten und Vergleichsspannung wird also 
sichergestellt, daft die auf integrierte Pixelspannung sich 
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immer in der oberen Halfte des vollen Signalhubs 
befindet. Eine Verbesserung in der Hinsicht einer 
Robustheit gegenuber Helligkeitsschwankungen im Laufe 
einer Integrationsphase stellt die Wahl einer niedrigeren 
Vergleichsspannung dar; sie erlaubt der Pixelhelligkeit 
wahrend der Integrationsphase in beschranktem Umfang 
anzusteigen, ohne dali das Pixel dadurch sattigt* 

Das in Fig. 3 Uber der relativen Beleuchtungsintensitat 
45 auf integrierte Pixelsignal 46 und Integrationssignal 
47 verdeutlichen diese sehr vorteilhafte Eigenschaft des 
lokalautoadaptiven Pixels. Aufgrund der logari thmischen 
Auftragung der Intensitat auf der horizontalen Achse 
erscheint die Pixelsignalkurve gekrummt, wahrend die in 
exponentiellen Abstanden verteilten Rampenstuf en 11 hier 
jeweils gleiche Breiten aufweisen. 

Das in Fig. 4 gezeigte Blockdiagramm zeigt schematisch 
das Zusammenspiel der Pixelschaltungen 50 mit den 
Peripheriekomponenten 53, 55 und 58 in einem 
Flachensensor . Wahrend der Integrationsphase versorgr die 
Integrationssteuerung 55 die in Spalten und Zeilen 
angeordneten Pixel 50 der Pixelrnatrix 51 mit den 
notwendigen Ansteuersignalen wie Reset 20, Takt 09, Rampe 
11 und Ucomp 08, die die Integrationssteuerung 55 aus 
einem Eingangstakt Clk 66 erzeugt. Die Signale werden fur 
alle Pixel 50 gemeinsam erzeugt, so dali alle Pixel 50 der 
Pixelrnatrix 51 synchron ihre Integrationsperioden 
beginnen, wahrend sie wie oben beschrieben den 
Endzeitpunkt selbst wahlen. 

Das Ende der Integrationsphase wird den aulierhalb des 
Chips liegenden Schaltungsteilen durch ein Signal am 
Ausgang Ready 67 angezeigt. Jetzt konnen diese eine 
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Zeilenadressen ZA 64 und das Zeilenf reigabesignal ZEN 65 
an den Zeilendekoder 53 legen, der dann die gewunschte 
Zeilenleseleitung 52 aufsteuert. Die Zeilenleseleitung 52 
ist mit den Pixelleseleitungen Read 20 aller Pixel 50 in 
der Zeile verbunden und sorgt dafiir, da!3 alle Pixel 50 
der ausgewahlten Zeile ihre auf integrierten Pixelsignale 
06 und f estgehaltenen Integrationssignale 14 auf die 
Pixelsignal-Spaltenleitungen 18 bzw. die 
Integrationssignal-Spaltenleitungen 19 ausgeben. 

Von all den parallel an der Spaltenansteuerung- und 
ausiese 58 anliegenden Pixelsignal- und 
Integrationssignal-Spaltenleitungen 56, 57 wahlt die 
Spaltenansteuerung- und ausiese 58 die Spalte aus, die 
durch die von aufien vorgegebene Spaltenadresse SA 63 
ausgewahlt wird. Mit anliegendem Spaltenf reigabesignal 
SEN 62 werden das ausgewahlte Pixelsignal 06 und das 
ausgewahlte Integrationssignal 14 auf den Pixelausgang 
Pixaus 59 und den Integrat ionssignalausgang Intaus 60 
ausgegeben. Nach erfolgter Ausiese aller Pixel 50 wird 
dann durch ein Signal an Start 61 die nachste 
Integrationsphase in der Integrationssteuerung 55 
angestolien . 
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PATENTANSPRUCHE 

1. Verfahren zum Betrieb von integrierenden 
Bildsensoren, bestehend aus 

a) einer Anordnung von lichtwandelnden Pixeln, die 
jeweils bestehen aus 

aa) einem lichtempf indlichen Element (01) zur 
photoelektrischen Konvertierung der auf es fallenden 
Lichtintensitat in einen lichtintensitatsabhangigen 
Photostrom; 

ab) einer integrierenden Vorrichtung (04,05) um 
innerhalb einer Integrationsphase den besagten 
Photostrom uber eine gewisse Integrationszeitdauer 
auf zuintegrieren; 

ac) einer zeitdauersteuernden Vorrichtung (07-10), 
zur Bestimmung des Anfangs- und Endzeitpunkts der 
Integrationszeitdauer; 

ad) einer Auslesevorrichtung (15) zur Weitergabe 
eines Pixelsignals wahrend einer Auslesephase, das 
der Menge des auf integrierten Photostroms 
entspricht ; 

b) einer Vorrichtung zur Bearbeitung der vorbenannten, 
von den Pixeln weitergegebenen Signale und 
Bereitstellung eines daraus erzeugten 

Ausgangs signals; 
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c) einer pixelsteuernden Vorrichtung, die alle oben 

genannten, in alien Pixeln vorhandenen Vorrichtungen 
derart mit Steuersignalen versorgt, dafi das 
vorgenannte Ausgangssignal ein das auf den Bildsensor 
einstrahlende Lichtbild wiedergebendes Signal 
darstellt, 

dadurch gekennzeichnet, dali die 
zeitdauersteuernde Vorrichtung der Pixel derart von der 
integrierenden Vorrichtung desselben Pixels beeinflulit 
wird, dali die zeitdauersteuernde Vorrichtung den 
Endzeitpunkt der Integrationszei tdauer abhangig von der 
auf das Pixel fallenden Lichtintensitat so wahlt, dali 
hohere Lichtintensitaten zu kurzeren 
Integrationszeitdauern fiihren, wahrend niedrigere 
Lichtintensitaten zu langeren Integrationszeitdauern 
fiihren. 

2. Verfahren nach Anspruch 1, 

dadurch gekennzeichnet, daU die 
zeitdauersteuernde Vorrichtung mit Hilfe eines 
elektronischen Schalters EinfluJi nimmt auf den 
Endzeitpunkt der Integrationszeitdauer, wobei der 
elektronische Schalter derart eingebaut ist, daii der 
elektronische Schalter den ZufluB des Photostromes in die 
integrierende Vorrichtung zur Beendigung der 
Integrationsszeit unterbricht. 

3. Verfahren nach Anspruch 1, 

dadurch gekennzeichnet, dali die 
zeitdauersteuernde Vorrichtung mit Hilfe eines 
elektronischen Schalters Einflufi nimmt auf den 
Endzeitpunkt der Integrationszeitdauer , wobei der 
elektronische Schalter derart eingebaut ist, dali der 
elektronische Schalter zwischen vorbenannter , 
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integrierender Vorrichtung und einer weiteren, 
speichernden Vorrichtung derart eingeschleif t ist, daft 
der elektronische Schalter zum besagten Endzeitpunkt den 
Signalweg zwischen der integrierenden Vorrichtung und der 
speichernden Vorrichtung derart unterbricht, dafi nach dem 
Ende der Integrationsphase die speichernde Vorrichtung 
ein Signal gespeichert hat, das in Relation steht zu dem 
zum besagten Endzeitpunkt von der integrierenden 
Vorrichtung abgegebenen Signal. 

4. Verfahren nach einem der vorhergehenden Anspruche, 
dadurch gekennzeichnet, daft jedes 
Pixel nach Ablauf oben bezeichneter Integrationsphase 
eine Integrationsdauerinf ormation gespeichert hat, die 
Auskunft daruber gibt, wie lange die bezeichnete 
Integrationszeitdauer des jeweiligen Pixels betrug, und 
die zusammen mit dem oben genannten Pixelsignal 
ausgelesen wird* 

5. Verfahren nach Anspruch 4, 

dadurch gekennzeichnet, daft die 
dort benannte Integrationsdauerinf ormation reprasentiert 
wird durch ein digitales Signal. ------- 

6. Verfahren nach Anspruch 4, 

dadurch gekennzeichnet, daft die 
dort benannte Integrationsdauerinf ormation reprasentiert 
wird durch ein analoges Signal. 

7. Verfahren nach Anspruch 6, 

dadurch gekennzeichnet, daft die 
dort benannte Integrationsdauerinf ormation durch ein 
amplitudendiskretisiertes, analoges Signal reprasentiert 
wird. 
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8. Verfahren nach Anspruch 4, 

dadurch gekennzeichnet, daft das 
dort benannte Signal im Pixel autark generiert wird. 

9. Verfahren nach Anspruch 4, 

dadurch gekennzeichnet, daft das 
dort benannte Signal mit Hilfe von Signalen, die von 
aufien an das Pixel angelegt werden, im Pixel generiert 
wird. 

10. Verfahren nach Anspruch 4, 

dadurch gekennzeichnet,- dali das 
dort benannte Signal dem Pixel zu jedem Endzeitpunkt 
passend von aufien bereitgestellt wird und vom Pixel zum 
geeigneten Zeitpunkt festgehalten werden mufl . 

11. Verfahren nach einem der vorhergehenden Anspriiche, 
dadurch gekennzeichnet, daft die 
oben genannte zeitdauersteuernde Vorrichtung sich nur zu 
wenigen, diskreten Zeitpunkten innerhalb einer 
Integrationsphase fiir die Beendigung der Auf integration 
des Pixelsignals entscheiden kann und daft vorbenannte, 
diskrete Zeitpunkte durch von aufterhalb an das Pixel 
angelegte Signale definiert werden. 

12. Verfahren nach Anspruch 11, 

dadurch gekennzeichnet, daft die 
genannten, von auften definierten Zeitpunkte exponentiell 
verteilt sind in dem Sinne, daft jeweils eine durch Wahl 
eines Endzeitpunkts wahlbare Integrationszeitdauer um 
einen festen Faktor langer ist als die nachst kurzere 
wahlbare Integrationszeitdauer . 
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13. Verfahren nach Anspruch 11, 

dadurch gekennzeichnet, daft die 
genannten, von auften definierten Zeitpunkte dual- 
exponentiell verteilt sind in dem Sinne, daft jeweils eine 
durch Wahl eines Endzeitpunkts wahlbare 

Integrationszeitdauer doppelt so lang ist wie die nachst 
kiirzere, wahlbare Integrationszeitdauer ♦ 

14. Vorrichtung fUr die Ansteuerung von Bildsensoren 
bestehend aus einer Vielzahl von Pixelsignal- 
Aufbereitungseinheiten, die jeweils 

eine Pixel-Empf angseinrichtung (01,02), mittels der auf 
ein lichtempfindliches Element (01) einfallendes Licht in 
einen lichtintensitatsabhangigen Photostrom wandelbar 
ist, 

eine Integrationseinrichtung (05) zum Auf integrieren des 
Photostromes wahrend einer vorgebbaren 
Integrationszeitdauer und 

eine Ausleseeinrichung zum Auslesen des dem 

auf integrierten Photostrom entsprechenden Pixelsignals 

wahrend einer Auslesephase enthalten, 

wobei die von den Pixelsignal-Auf bereitungseinheiten 

ausgelesenen Pixelsignale von einer gemeinsamen 

Verarbeitungseinrichtung verarbeitet und zu einem das auf 

den Bildsensor einstrahlende Lichtbild wiedergebenden 

Signal zusammengesetzt werden, 

dadurch gekennzeichnet, dafi die 
Pixel-Empf angseinrichtungen Mittel zur Vorgabe des Endes 
der Integrationszeit aufweisen derart, daft die 
Integrationszeit unter Beriicksichtigung der einfallenden 
Lichtintensitat beendet wird, bevor die Integrations- 
einrichtung (05) in den Sattigungszustand geiangt. 
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